Data Engineer

Description

Principales activités :
- Recueillir les besoins métiers des différentes unités demandeuses
- Concevoir des applications transforment les données brutes en informations exploitables
- Gérer le développement et de la maintenance de ses applications
- Gérer l’infrastructure de données et de déployer des applications de traitement des données
- Industrialiser et automatiser le nettoyage de la donnée selon les spécifications retenues
- Gérer le cycle de vie de la donnée conformément aux directives inscrites dans le RGPD
- Mise à jour permanente sur les technologies et langages utilisés dans le but de partager ses connaissances et aider à l’avancement du projet.

Expertises :
- Langage : Python, Scala, Spark, SQL
- Bass de données : PostgreSQL, NoSQL
- Orchestration : Airflow, Luigi
- DevOps : GitLab, CI-CD, Docker, Ansible, Terraform
- Outils Cloud : GCP, Databricks
- Les plus : Dbt, Looker Studio, BigQuery, Airflow, Kafka, Dataflow, Firestore